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Abstract 



A virtual machine system having a plurality of virtual machines, in v^hich each virtual 
machine can be relocated to a now storage area of main storage w^ithout interfering with 
any other virtual machine. The relocation is carried out by move instructions issued by a 
service processor 5 upon receipt of a relocate command. These instructions pass control 
to a controlling section 6 which instructs a logical instruction processor (LIP) controlling 
section 7 to temporarily stop the LEP of the particular virtual machine. Next a check is 
made by the resource managing section 8 to determine whether the virtual machine can 
be moved. Once that has been checked, the virtual machine is relocated on the main 
storage area in accordance with a designated address by the relocate command and the 
controlling section 7 restores operation of the virtual machine. 



Data supplied by epo database 



Qs) BUNDESREPUBLIK 
DEUTSCHLAND 




Offenlegungsschrift 
DE 42 17 444 Al 



(51) Int. CIA* 

G 06 F 12/08 



DEUTSCHES 
PATENTAMT 



@ Aktenzeichen: 
@ Anmeldetag: 
@ Offenlegungstag: 



P 42 17 444.9 
26. 5.92 
3. 12. 92 



< 

I 



CM 
UJ 

O 



@ Unionsprioritat: (S) @ (Sj) 


@ Erfinder: 


27,05.91 JP 3-120761 


Imada, Toyohisa; Takeshima, Yasusuke, Hadano, JP 


(7?) Anmelder: 




Hitachi, Ltd., Tokio/Tokyo. JP; Hitachi Computer 
Engineering Co. Ltd.. Hadano, Kanagawa, JP 




@ Venreter: 




Beetz, R., Dipl.-lng. Dr.-lng.; Timpe, W., Dr.-lng.; 
Siegfried. J.. Dipl.-tng.; Schmitt-Fumian. W., Prof. 
Dipl.-Chem. Dr.rer.nat.; Mayr. C, 
Dipl.-Phys.Dr.rer.nat., Pat.-Anwalte. 8000 MCinchen 





@ Verfahren und Einrichtung zor dynamischen Verlagerung von virtuellen Maschinen in einem Hauptspeicher 
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In einem System von virtuellen Maschinen (LPARs) wird 
die Verlagerung einer virtuellen Maschine (LPAR) im Haupt- 
speicher venwirklichi. ohne da6 der Benut^er der virtuellen 
Maschine (LPAR) Auswirkungen dieser Verlagerung erfahrt, 
wodurch die Effizienz und die Brauchbarkeit der das System 
von virtuellen Maschinen enthattenden Informaiionsverar- 
beitungseinrichtung verbessert wird. In dem System von 
virtuellen Maschinen. das eine Betriebsart besitzi. In dem 
logisch unterteilte Bereiche (LPARs) konfigurieri werden. 
werden die Hardwarebetriebsmittel eniweder exklusiv oder 
zeitlich veriahnt logisch unterteilt. Die den jeweiligen lo- 
gisch unterteilien Bereichen (LPARs) zugewiesenen Haupt- 
speicherbereiche (2) werden einer von einem Dienstprozes- 
sor (5) ausgefuhrten Verlagerung gemaQ einem Verlage- 
rungsbefehl (MVSTOR) unterworfen. Dicse Verlagerung 
umfaSt das lemporare Anhalten einer virtuellen Maschine 
(LPAR), die eigentliche Verlagerung der virtuellen Maschine 
(LPAR) im Hauptspeicherbereich (2) gema& einer vom 
Veflagerungsbefehl (MVSTOR) bezeichneten Adrosse und 
die Wiederhersiellung der virtuellen Maschine (LPAR) auf 
der Grundiage des verlagerten Hauptspeicherbereichs. Hier- 
bei wird der Hauptspeicherbereich-Anfangspunkt (HSA) 
eines jeden verlagerten Hauptspeicherbereichs (2) geandert. 
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Beschreibung 

Die vorliegende Erfindung beirifft ein System von 
virtuellen Maschinen, in dem diese vinuellen Maschinen 
logisch unterteilten Bereichen (LPARs) zugeordnet 
sind» und insbesondere ein Verfahren und eine Einrich- 
lung zur Vcrlagerung von derartigen virtucllcn Maschi- 
nen in einem Hauptspeicher. 

Im Stand der Technik sind ein Verfahren und eine 
Einrichtung bekanni. mil denen einer vinuellen Maschi- 
ne eines Systems von virtuellen Maschinen ein Haupt- 
speicherbcrcich neu zugewiesen werden kann, wobei 
der der virtuellen Maschine zugewiesene Hauptspei- 
chcrbercich crwcitcri oder verkteineri wird. Bci dieser 
herkommiichen Technologic wlrd jcdoch der Anfangs- 
punki des der virtuellen Maschine zugewiesenen 
Hauptspeicherbereichs. d. h. cine Startadresse des zuge- 
wiesenen Bereichs. nicht geanden. Wenn daher in einem 
Fall, in dem ein Zwischenbercich des Hauptspeichers 
physikalisch einer ersicn virtuellen Maschine zugewie- 
sen wird und diese erste vinuelle Maschine ein Basis- 
Sofiwarcprogramm wie etwa cin Bciricbssystcm (OS) 
verwendei, eine Anforderung zum Zuweisen cinesTciis 
des Hauptspeichers an cine zweitc virtuelle Maschine 
erzcugt wird. ist es in einigen Fallen nicht moglich. einen 
fur die zwcite vinuelle Maschine crforderlichen nach- 
folgenden Teil des Hauptspeichers zuzuweisen. In die- 
sem Fall ist es im Stand der Technik notwcndig. die erste 
virtuelle Maschine einmal anzuhatten, um den Anfangs- 
punki des ihr zugewiesenen Hauptspeicherbereichs 
fesizulegen. woraufhin ein anfanglichcr Programmlade- 
vorgang I PL ("Initial Program Loader**) ausgefiihrt wird. 

Es ist daher die Aufgabe der vorliegenden Erfindung. 
ein Verfahren und eine Einrichtung zur dynamischen 
Veriagerung einer virtuellen Maschine in einem Haupt- 
speicher zu schaffen. mit denen in dem obcn beschriebe- 
nen FaR in dem der zweitcn virtuellen Maschine kcin 
geeigneter Hauptspeicherbereich zugewiesen werden 
kann. die erste virtuelle Maschine in ihrem Zustand ge- 
lasscn wird. deran, daQ der der ersten virtuellen Maschi- 
ne zugewiesene Hauptspeichcranfangspunkl an eine 
spezifizierte Adresse bewegt wird. um einen daraus sich 
ergebenden freien Bereich der zweiien vinuellen Ma- 
schine zuzuweisen. damit die zweite virtuelle Maschine 
in den Betriebszustand versctzt werden kann. so daO die 
Effizienz und die Brauchbarkeit des Informationspro- 
zessors verbessert wird. 

Diese Aufgabe wird bei einem Verfahren der gat- 
tungsgemaOen Art erfindungsgemaB gelost durch die 
folgendcn Schritte: Anhalien einer vinuellen Maschine 
eines mehrere virtuelle Maschinen umfassenden Sy- 
stems, Verlagern der virtuellen Maschine in einem 
Hauptspeicherbereich gcmaG einer durch einen Verla- 
gerungsbcfehl bezerchneten Adresse und Wiederher- 
stellen der virtuellen Maschine auf der Grundlage der 
bezeichneten Adresse. 

Die Aufgabe wird bei einer Einrichtung der gattungs- 
gemaOen Art erfindungsgemaQ gelost durch die Merk- 
male im kennzeichnenden Teil des Anspruches 8. 

Wenn die Mehrzahl der virtuellen Maschinen den ge- 
samten physikalisch en Hauptspeicher nutzcn und wenn 
entweder bestimmte Teile des Hauptspeichers, die we- 
nigstens zwei vinuellen Maschinen zugeordnet sind, dy- 
namisch ausgetauscht werden sollen oder wenn statt 
dessen ein Teil des Hauptspeichers. der einer der meh- 
reren virtuellen Maschinen zugeordnet ist, erweiiert 
werden soil, wahrend die mehreren virtuellen Maschi- 
nen in Betrieb sind, konnen erfindungsgemaB Teile des 
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Hauptspeichers. die anderen virtuellen Maschinen zuge- 
wiesen sind. beliebig verlagert werden. Daher kann oh- 
ne Umspeichern der in Betrieb befindlichen mehreren 
virtuellen Maschinen der Anfangspunkt des einer in Be- 
5 irieb befindlichen. spezifizienen vinuellen Maschine zu- 
gewiesenen Hauptspeicherbereichs. d. h. die Stanadres- 
se des zugewiesenen Bereichs, beliebig gcandert wer- 
den. wobei der Betrieb der virtuellen Maschine im we- 
sentlichen nicht unterbrochen wird. Dies hat zur Folge. 
to daB die Veriagerung des Hauptspeicherbereichs der 
spezifizienen virtuellen Maschine nahezu ohne wesent- 
liche Auswirkung auf den Benutzer der vinuellen Ma- 
schine ausgefuhrt werden kann, wodurch die Effizienz 
und die Brauchbarkeit des Informationsverarbeitungs- 
13 systems verbessert wird. 

Weitere Aufgaben. Merkmale und Vorieile der Erfin- 
dung sind in den Unteranspruchen, die sich auf eine 
bevorzugte Ausfiihrungsform der vorliegenden Erfin- 
dung beziehen, angegeben. 
20 Die Erfindung wird im folgenden anhand einer bcvor^ 
zugien Ausfiihrungsform mit Bezug auf die Zeichnun- 
gcn naher criauten; cs zeigt 

Fig. I A ein schemaiisches Blockschaltbild zur Erlau- 
lerung des Hardwarebetriebsmittel-Konfiguration ei- 
25 nes Systems von virtuellen Maschinen in einer Ausfiih- 
rungsform der Erfindung; 

Fig. 1 B cin Blockschaltbild zur Erlauterung der Ar- 
chiiekiur des Systems von vinuellen Maschinen; 
Fig. 2 eine Darstellung zur Erlauterung der Prozedur 
30 des Vcrlagerns eines Hauptspeicherbereichs, der einer 
virtuellen Maschine im crfindungsgcmaBen System von 
vinuellen Maschinen zugewiesen ist; 

Fig. 3A, B Darstcllungen zur Erlauterung des Zuwei- 
sungszusiandcs der virtuellen Maschine im Hauptspei- 
35 Cher vor der Verschiebung des zugewiesenen Haupt- 
speicherbereichs; und 

Fig. 4 A, B Darstcllungen zur Erlauterung des Zuwei- 
sungszustandcs der vinuellen Maschine im Hauptspei- 
cher nach der Verschiebung des zugewiesenen Haupt- 
40 speicherbereichs. 

Zunachst wird mil Bezug auf die Zeichnungen ein 
System von vinuellen Maschinen gemaB einer Ausfuh- 
rungsform der vorliegenden Erfindung genauer be- 
schrieben. In diesem System von vinuellen Maschinen 
45 kann wahrend des Beiriebs cine vinuelle Maschine ei- 
nem neuen Bereich eines Hauptspeichers zugeordnet 
werden. 

Zunachst wird mit Bezug auf die Fig. I A der Hardwa- 
reaufbau des erfindungsgemaOen Systems von virtueU 
50 len Maschinen beschrieben. Das System von virtuellen 
Maschinen besitzt eine neue Unterteilungskonfigura- 
tion des Hauptspeichers, wobei die einzelnen Abschnit- 
te dieser Konfiguration als logisch untertctlte Bereichc 
(LPARs) bezeichnet werden. Die Hardwarebetriebsmit- 
55 tel dieser logisch unteneilten Bereichc umfassen Logik- 
befehl-Prozessoren(LIPI bis L1P4) I. Hauptspeicherab- 
schniite bzw. vinuelle Speicherabschnitte (HS/VS) 2, 
Kanalpfade (CM) 3 und eine Einrichtung 4. Die Einrich- 
tung 4 wird anteilig von vier virtuellen Maschinen be- 
60 nutzL Wie aus der Figur ersichtlich. entsprechen die 
Logikbcfchl-Prozcssoren LI PI und LIP2 einer virtuel- 
len Maschine LPAR I. Der Logikbefehl-Prozessor LIP3 
entspricht einer virtuellen Maschine LPAR II. Der Lo- 
gikbefehl-Prozessor L1P4 entspricht den vinuellen Ma- 
es schinen LPAR III und LPAR IV. 

In Fig, IB ist die Architektur eines mehrere vinuelle 
Maschinen enihaltenden Systems gezeigt. |ede virtuelle 
Maschine enth^lt einen Logikbefehl-Prozessor (LIP) I. 
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Ein Dienstprozessor (SVP) 5 erzeugt aufgrund etnes 
Verlagerungsbefehls einen Verschiebungsbefehl. Ein 
Beiriebsmitiel-Verwaltungsabschnitt 8 verwaliet und 
steuen den jeder der Mehrzahl der virtuellen Maschi- 
nen zugewiesenen Betriebsmittelzustand. Aufgrund ei- 5 
ner in ihn eingegebenen Prufanforderung fuhrt der Ab- 
schniti 8 eine Priifung aus, um fesizusiellcn, ob eine 
durch die Anforderung bezeichnete vlriuelle Maschine 
in einem Haupispeicherbereich verlagert werden kann. 
Wenn die bezeichneie virtuelle Maschine von einem 10 
LPAR-Steucrabschnitt 6 verlagert wird, wird der verla- 
gerte Bereich des Haupispeichers samtlichen Eingabe- 
/Ausgabeprozessorcn 10, die der bezcichneten virtuel- 
len Maschine zugewiesen sind. mitgeicilt. Fur jede virtu- 
elle Maschine ist ein LIP-Sieucrabschnitt 7 vorgesehcn. 15 
der die Operaiionen des oder der Logikbefehl-Prozes- 
soren (LIP) 1 der virtuellen Maschine steuerL Das be- 
deutet. daO der Abschnitt 7 die Operation des LIP I der 
bezcichneten virtuellen Maschine anhalt und dann diese 
Maschine entsprcchcnd einer Adresse. die durch einen 20 
SIE-Befehl (Siariinterpretation-Ausfiihrungsbefehl) 
spezifizien wird. die Maschine neu speicheri, d. h. wie- 
derhcrstellL Der LPAR-Sicucrabschnitl 6 arbcitci auf- 
grund eines Verschiebungsbefehls. Wenn die Operation 
der bezcichneten virtuellen Maschine unterbrochen 25 
worden ist, wartet der Abschnitt 6 einen Zusiand ab, in 
dem samtliche E/A-Prozessoren (lOP) 10. die der be- 
zcichneten virtuellen Maschine zugewiesen sind. auQer 
Betrieb sind, um die Prufanforderung zu erzeugen und 
an den Betriebsmitiel-Verwaltungsabschnitt 8 auszuge- 30 
ben. Wenn der Venvattungsabschnitt 8 feststcllt. daS die 
bezeichnete virtuelle Maschine im Hauptspeicherbe- 
reich verlagert werden kann. verlagert danach der Ab- 
schnitt 6 diese bezeichnete virtuelle Maschine enispre- 
chend der durch den Verschiebungsbefehl angegebenen 35 
Adresse. 

Wenn der Verlagerungsbefehl eine Erweiterung eines 
Hauptspeicherbcreichs beiriffi, der einer anderen an die 
bezeichnete virtuelle Maschine angrenzenden virtuellen 
Maschine zugewiesen ist. erzeugt der Dienstprozessor 5 40 
einen Erweiterungsbefehl. nachdem die bezeichnete 
Maschine wiederhergesiellt worden ist. um aufgrund 
dieses Erweiierungsbefehls den der anderen virtuellen 
Maschine zugewiesenen Bereich zu erweitern. Wenn 
der Verlagerungsbefehl einen Austausch von Haupt- 45 
speicherbcrcichcn bcirifft. die zwei bezcichneten virtu- 
ellen Maschinen zugewiesen sind. steuert der Sieuerab- 
schniit 6 die LlP-Steuerabschnitte 7, derart, daB er die 
zwei bezcichneten virtuellen Maschinen anhali, dann 
liesi der Stcuerabschnitt 6 den Inhalt aus. der in dem 50 
Hauptspeicherbereich gespeichen isi, der einem der 
zwei bezcichneten virtuellen Maschinen zugeordnei ist, 
um den ausgclcsenen Inhalt in der anderen der zwei 
virtuellen Maschinen zu spcichcrn. anschlicOcnd wie- 
derhoit der Stcuerabschnitt 6 die Auslese- und Spei- 55 
cheroperationen fiirdcn der anderen virtuellen Maschi- 
ne zugewiesenen Speicherbereich, schlieOlich stellt der 
Stcuerabschnitt 6 diese virtuellen Maschinen wieder 
her. 

Die Hardwarc-Betriebsmittel werden den logische 60 
virtuelle Maschinen darstcllenden LPARs entweder ex- 
klusiv oder zeitlich vcrzahnt in einer LPAR-Betriebsart 
zugewiesen. D.h.. daO im Hardwareaufbau ein Logikbe- 
fehl-Prozessor 1 einem LPAR zeitlich verzahni zuge- 
ordnet wird, wahrend die ubrigen Hardwarekomponen- 65 
ten dem LPAR exklusiv zugeordnei werden. 

Jeder einem LPAR zugewiesene Hauptspeicherbe- 
reich. d. h. ein LPAR- Bereich, kann durch die Verschie- 



bungsverarbeitung dynamisch gcandcri werden, wie in 
Rg. 2 gezeigt ist. D.h, daO der Anfangspunkt, also die 
Kopfadresse eines jeden LPAR-Bereichs. Im physikali- 
schen Hauptspeicher beliebig geandert werden kann. 
Die Verschiebungsverarbeitung wird durch den Dienst- 
prozessor (SVP) 5 ausgefuhrt, der einen LPAR-Rahmen 
aufweist, der eine Opcrationsschnittstclle darsiellt Wie 
in Fig. 2 gezeigt ist, vcrbindet diese Schnittsielle den 
Dienstprozessor 5 mil jedem LPAR. mit dem LPAR- 
Steucrabschnitt 6. der die an jeden LPAR gerichteien 
Operationsbefehle und dcrgleichcn steuert, mit dem 
LlP-Stcuerabschnitl 7, der einen Cast, z.B. das Be- 
triebssystem (OS), aufgrund eines Bcfehls vom Steuer- 
abschnitt 6 steuert und eine Simulationsverarbeitung fur 
einen cine Simulation erfordernden Befehl ausfuhri, und 
mit dem Betriebsmittel- Vcrwaltungsabschniit 8. der die 
Information der physikalischen Betriebsmittel samili- 
cher LPARs verwaltet 

Nun wird mit Bezug auf Fig. 2 ein Beispiel der Ver- 
schiebungsverarbeiiung fiir den Fall beschrieben, in 
dem zwei LPARs, etwa LPARl und LPAR2. in Betrieb 
sind. 

Zunachsi wird vor der Initialisierung der Operation 
eines jeden LPAR der Hauptspeicher logisch unterteilt. 
um Bereiche fiir den LPARl bzw. den LPAR2 zu defi- 
niercn. In Fig. 3A sind ein Haupispeicherbercich-An- 
fangspunkt (HS-Bereich-Anfangspunkt) und cine HS- 
GroOe fur jeden der dcfinieaen Bereiche gezeigt Eine 
HS-Lucke gibt die GroDc des ungenutzten Bercichs 
zwischcn dem LPARI-Bereich und dem LPAR2-Be- 
rcich, die sich in einem hohercn Adrcsscn bereich im 
Hauptspeicher befindet. an. Da in diesem Beispiel zwi- 
schcn den LPARl- und LPAR2-Bereichen keine HS- 
Lucke vorhanden ist, wird die HS-Lucke des LPARl auf 
"0"geseizt Wenn zwei virtuelle Maschinen LPARl und 
LPAR2 in den beiden auf diese Weise definicrten 
LPAR-Bereichen arbeiten. werden daruber hinaus im 
unierieiltcn Zustand des Haupispeichers die Bereiche 
zwischcn 0 MB und 128 MB und zwischcn 129 MB und 
384 MB dem LPARl bzw. dem LPAR2 zugewiesen, 
wahrend der verbleibende Bereich mit 125 MB. der zwi- 
schcn 385 MB und 509 MB liegt. nicht zugewiesen wird. 
Wahrend der Operaiionen des LPARl bzw. des LPAR2 
unter diesen Umstanden kann die Hauptspeichervcr- 
schiebungsfunktion (HS-VERSCHIEBUNG) der vorlic- 
genden Erfindung verwcndet werden. 

Zunachsi wird angenommen. daC fur den LPAR2 der 
HS-Anfangspunkt bei 192 MB geseizt werde. d. h., daQ 
durch einen HS-VERSCHIEBUNGS-Befchl (der im fol- 
genden mit MVSTOR-Befehl bezeichnei wird) der 
Hauptspcicherbcrcich-Anfangspunki (HSA) durch den 
LPAR-Rahmen des SVP 5 auf HSA - 192 gesctzt wird. 
Aufgrund dieses Bcfehls wird die Sieuerung vom SVP 5 
an den LPAR-Steucrabschnitt 6 fiir den LPAR2 ubcr- 
tragen. Vom Steuerabschnilt 6 wird an den LIP-Steuer- 
abschnitt 7 ein Befehl geschicki, um einen LIP des 
LPAR2 vorubergchend anzuhalten. Daraufhin seizt der 
LlP-Stcuerabschnitt 7 den LIP. d. h. den Cast des 
LPAR2. also das Beiriebssystem. in den angehaltencn 
Zusiand (Schriti 201). 

Es wird cine Wartcoperaiion ausgefuhrt. durch die 
wenigstcns 10 Sekunden gewartet wird. wahrend dencn 
samtliche mit dem LPAR2 verbundenen E/A-Prozesso- 
ren auCer Beirieb gehen (Schriit 202). Wenn der LIP 
angehalicn worden ist, kann ubiicherweise der E/A-Pro- 
zessor sofort auOer Betrieb gehen; es wird jedoch bei 
Annahme eines speziellen Falls eine Zeitspannc von 10 
Sekunden vorgesehcn. Im Fall einer Waneoperaiion 
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wird eine Meldung ausgegeben. um irgendwelche E/A- nach der Beendigung des MVSTOR-Befehls der dem 

Einnchiungen. die s.ch noch im Betriebszustand befin- LPARI bzw. der dem LPAR2 zugewiesene Hauptsoei- 

den, 2u melden. Der Schriit 202 .st notwendig. um die cherbereich in einem Zustand. wie er in Fie. 4A gezeiei 

olgende Mogiichkeit zu vermeiden: Selbst wenn der IsL Da durch den MVSTOR-Befehl fiir den LPARl eine 

UP im Schrui 201 angehalien wird, befindei sich der 5 HS-Lucke erzeugi wird. kann der LPARl-Bereich umer 

E/A-Prozessor noch immer in Betrleb. so dafl vom E/A- Verwendung eines herkommlichen Befehls soweit er- 

Prozessor aufgrund eines E/A-Befehls moglicherweise hohl werden. wle dies die HS-Lucke zulaBt AuBerdem 

aufden Bereich vor der Verschiebungzugegriffen wird sind die Bereichszuweisungszusiande des LPARl und 

Vom Beiriebsmuiel-Verwaliungsabschnitt 6 wird ei- des LPAR2 von der Art, wie sie in Fig. 48 gezeigi sind- 

ne Prufung ausge/uhru um fesizusiellen. ob der durch ,0 d.h^daQ der LPAR2-Bereich ebenfalls in Richtung an-* 

den Befehl spez.fiziene HSA (in diesem Fall 192 MB) sieigender Adressen des Haupispeichers um 61 MB er- 

geeignet isu d. h. ob der LPAR2-Bereich bcwegt warden weiiert werden kann 

kann (Schritt 203) Der Bciriebsmiucl-Verwahungsab- Wie oben erwahnu kann der dem LPARl zugewiesc- 

schn.ti 8 besitzt HS-Abbildungen samtlicher LPARs ne Haupispcichcrbcrcich crrmdungsgemSB so erwciiert 

und bestimmt auf der Crundlage des spezifizierten ,5 werden. daO nahczu kein EinfiuO auf den Beiricbszu- 

n ^'?n ^If' "f^' ^^'"^ ^^S*""* "''^ ^" LPAf^ ausgeubt wird Wie aus der obieen 

GroDe des LPAR2 besitzi. von emem anderen LPAR Beschreibung verstandlich wird ist es mit dem erfin- 

genutzt w,rd '"J bcschncbenen Beispiel wird der Be- dungsgemaBen System von virtuelien Maschinen mog- 

[ p. p'oT'^'" u'^^^'J" ""^ ^^"^ MVSTOR-Befehl zu schaffen. mil dem dfr 
LPAR2benutzt.wahrenddcr Bcrcichab385 MB nicht 20 Ausgangspunkl des LPAR-Bereichs im physikalischen 

zugcw^cscn ,st. so daO der LPARS-Bcrcich vcrschoben Hauptspeicher eines Systems von virtuelien Maschinen 

Tpap^r hK i""' mit cincr LPAR-Betricbsart bcliebig gcanden werSen 

LPAR2.Bereich bewegl werden kann. schicki der Be- kana Dadurch wird folglich die hcrkommlichc Opera- 

triebsmiitel-VerwaItungsabschn.it 8 an die E/A-Prozes- tion unnotig. durch die die in Betrieb befindliche virtuel- 
soren emen SALE-Befehl (Befehl zum Setzen der crwei- 25 le Maschine angehalten wird um den Haupispeicheran- 

terien Adressengrenze). um den LPAR2-Bereich nach fangspunkt in einem weiteren Hauptspeicher bereich zu 

der Verschiebung zu melden. setzen und den LIP nach der Verlagerung des LPAR- 

Nun wird die eigcntliche Speicherubenragungsverar- Bcreichs neu zu iniiialisieren. Dies hat zur Folge dafl die 

beitung gemiiB den Schriucn 204 bis 209 bcschriebcn. virtuclle Maschine ununtcrbrochen bctrieben werden 
Zunachst werden eine Stariadressc des Ubertragungs- 30 kann. 

ausgangsbcreichs des LPAR2.Bercichs. und eine Start- Das System von virtuelien Maschinen der vorlicgcn- 
adresse des Ubenragungszielbereichs festgesetzt den Erfindung umfaDt eine Informationsverarbeitungs- 
(Schnit 204). In dieser Ausfuhrungsform werden die einrichtung. einen Dienstprozcssor.der fOr die Informa. 
Stariadressen des Uberiragungsausgangsbcreichs und tionsverarbeitungseinrichiung eine Bedienerschnittstel- 
des Ubertragungszielbereichs durch 384 MB bzw. 448 35 le schafft, und eine Hardwarekonfiguration zur Steue- 
MB m emcr Sciienemhcit dargcsiellL D.h. da3 die rung der Mehrzahl der virtuelien Maschinen. Die Hard- 
Ubertragungsopcration bei den jeweiligen Stariadrcs- warekonfiguration ist eniwcder exklusiv oder zciilich 
sen begonnen wird. derart. dafl die Adressen bei jeder verzahnt logisch unterteilL Dor Anfangspunkt eines 
Operation jeweils um erne Seite dekremeniiert werden. Haupispeicherbercichs einer jeden der Mehrzahl der 
Em Schiussel zum Schuiz der Daten der einzelnen Sei- 40 virtuelien Maschinen wird geanden um den zugewicse- 
ten des Ausgangsbcreichs wird ausgelesen (Schritt 205) nen Hauptspeicherbereich zu verschiebcn 
und in einem Register im LPAR-Stcuerabschniti 6 gesi- Wenn dariiber hinaus die mehreren virtuelien Ma- 
chert Dann werden die Scuendaten beginnend bei der schinen den gesamten physikalischen Hauptspeicher 
im Schritt 204 crhaltcncn Adrcsse in den Obcrtragungs- vcrwenden. ist es moglich. die wenigstens zwci virtuel- 
zielbereich iibertragen (Schriit 206). um den vorhcr er- 43 len Maschinen zugcwiescncn Haupispeicherbereiche 
haltenen Schiussel im Ubertragungszielbereich an einer dynamisch auszuiauschen. 

vorgegebenen Adresse zu setzen (Schritt 207). Durch Wenn auBerdem der Hauptspeicherbereich einer der 

diese Operation ist die Datenubenragung fiir cine Seiie Mehrzahl der virtuelien Maschinen erweiierl werden 

abgeschlossen. Anschlieflend werden die Adresse des soil, wahrend die mehreren virtuelien Maschinen arbei- 

Uberiragungsausgangsbcreichs und die Adresse des 50 ten. konnen die Haupispeicherbereiche anderer viriuel- 

UUcrtragungszielbcreichs aktualisieri (Schritt 208). In ler Maschinen beliebig bewegt werden. Wenn daher die 

dieser Ausfuhrungsform wird der Scitenzahlsiand bei Adresse des einer bcstimmicn virtuelien Maschine zu- 

jeder Ubenragung um den Wert "1" verminden. um die gewiesenen Haupispeicherbercichs gclicfert wird, fuhrt 

Ubertragungsopcration fur den gesamten Bereich des der Dienstprozessor eine entsprechende Operation aus. 

dem LPAR2 zugewiesenen Haupispeicherbercichs in 55 um die Anderung des Anfangspunkts des Hauptspei- 

Seiteneinheiten wiederholi auszufiihren. Durch diese cherbereichs an den Sieuerabschniti der speziellen vir- 

eben beschriebene Operation ist die HS-Oberiragungs- luellen Maschine zu melden. Der Steuerabschnili halt 

operation beendet (Schritt 209). den LIP-Steuerabschnitt an. Dann wird die Eignung des 

Um schlieOlich den LIP wicdcrhcrzusiellen. wird an bestimmien Hauptspeicherbcreichanfangspunktes 

den LlP-Steuerabschniti 7 aufgrund eines SIE-Befehls w durch den die physikalischen Betriebsmittel samtlicher 

ein Befehl ausgegeben. Daraufhin setzt der LIP-Steuer- virtueller Maschinen vcrwaliendcn Beiriebsmiitel-Ver- 

abschnitt 7 einen neuen HSA. der durch die Parameter waliungsabschniit gepruft Wenn bestatigi wird, dafl der 

des SIE-Befehls bereiigestellt wird und stellt den LIP Bereich in den spezifizierien Bereich bewegt werden 

wieder her. D.h, dafl der Cast des LPAR2 gesiartet kann. bewegt der Steuerabschnili fur die virtuelle Ma- 

wird (Schriit 210). Dariiber hinaus wird dem Rahmen 65 schine die Daien der Seiteneinheit Dann wird durch den 

desSVPSdas Ergebnisdes MVSTOR-Befehls gemeldet SALE-Befehl der Umfang des neuen Haupispeicherbe- 

(Schriii 211). In dieser AusfOhrungsform wird der reichs der virtuelien Maschine an die mil der virtuelien 

MVSTOR-BefchI normal bccndet Hicrbei befindei sich Maschine gekoppelien E/A-Prozessoren gemeldet. 
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schlieBlich wird der Anfangspunkt des Hauptspeicher- 
bereichs durch die Parameter des SIE-Befehls geandert. 
wodurch der LlP-Stcuerabschnitt wiederhergcsiellt 
wird. Daher kann der Haupispeicherbereich der spezifi- 
ziertcn vinuellen Maschine ubertragen werden, wobei 5 
die mit dieser vinuellen Maschine arbeitende Bedie- 
nungspcrson nahezu kcinc Auswirkungcn feststellt. 

Die obige Beschreibung ist anhand einer speziellen 
Ausfuhrungsform gegeben worden. Die vorliegende Er- 
findung ist jedoch nichi auf diese Ausfuhrungsform be-; 10 
schranki und kann selbstverstandlich auf zahlreiche 
Weisen abgewandelt und veranderi werden, ohne vom 
Geist und vom Umfang der vorliegenden Erfindung ab- 
zuweichen. 

IS 

Paientanspruche 

1. Verfahren, das in einem mehrere virtuelle Ma- 
schinen (LPARs) umfassenden System von virtue!- 
len Maschinen ausgcfuhrt wird, wobei das Vcrfah- 20 
ren der Vcrlagerung einer durch einen Verlage- 
rungsbefchl (MVSTOR) spczifizienen vinuellen 
Maschine (LPAR) in cincm Hauptspeicherbcrcich 
(2) dient, gekennzeichnet durch die folgenden 
Schrilte: 25 
lempora res Anhalien (201) einer vinuellen Maschi- 
ne (LPAR); 

Verlagern (206)der virtuellcn Maschine (LPAR) im 
Haupispeicherbereich (2) gemifl einer durch den 
Verlagcrungsbefehl bezcichncten Adrcssc; und 30 
Wiederherstellen (210) der vinuellen Maschine 
(LPAR) auf der Grundlage des verlagenen Haupt- 
speicherbereichs (2). 

2. Verfahren gemaO Anspruch 1. dadurch gekenn- 
zeichnet, daO der Schriti des temporaren Anhaliens j5 
die folgenden Schritte umfaBt: 

tcmporares Anhalten (201) cines Logikbefehlpro- 
zessors( LIP) der vinuellen Maschine (LPAR); und 
Wanen (202), bis samtliche EingabeVAusgabepro- 
zessoren (10). die dem Logikbcfehlprozessor (LIP) 40 
zugeordnet sind, auOer Betrieb gesetzt worden 
sind. 

3. Verfahren gemafl Anspruch 1, dadurch gekenn- 
zeichnet, daQ der Verlagerungsschriit die folgen- 
den Schritte umfaOt: 45 
Feststellen (203) anhand der bezeichneten Adrcssc. 
ob die virtuelle Maschine (LPAR) im Haupispei- 
cherbereich (2) verlageri werden kann: und 
Verlagern (206) der vinuellen Maschine (LPAR) 
entsprechend der durch den VerlagerungsbcfchI 50 
(MVSTOR) bezeichneten Adresse, wenn fesige- 
stclli wird, daO die virtuelle Maschine (LPAR) ver- 
lagcn werden kann. 

4. Verfahren gemaO Anspruch 3, dadurch gekenn- 
zeichnet, daO der Verlagerungsschriit den folgen- 55 
denSchritt umfaQt: 

Obenragen von Speicherinhalten des momentan 
der virtuellen Maschine (LPAR) zugcwiesenen 
Haupispeicherbereichs (2) in einen neuen Haupi- 
speicherbereich (2), der auf der Grundlage der be* eo 
zeichneten Adresse in den Seiieneinheitcn be* 
slimmtist 

5. Verfahren gemaQ Anspruch 1. dadurch gekenn- 
zeichnet, daG der Wiederherstellungsschriii die fol- 
genden Schritte umfaQt: 65 
Erzeugen eines Wiederhersteliungsbefehls fur die 
virtuelle Maschine (LPAR): 

Melden des verlagenen Haupispeicherbereichs (2) 
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an samtliche der vinuellen Maschine (LPAR) zuge- 
wiesene Eingabe-ZAusgabeprozessoren (10) auf- 
grunddes Befehls;und 

Wiederherstellen (210) der virtuellen Maschine 
(LPAR) auf der Grundlage der bezeichneten 
Adresse. 

6. Verfahren gemaD Anspruch 1. gekennzeichnet 
durch den folgenden Schritt. falls der Erwcitcrungs- 
befehl die Erweiierung eines Haupispeicherbe- 
reichs (2) betrifft. der einer der vinuellen Maschine 
(LPAR) bcnachbarten weiteren virtuellen Maschi- 
ne (LPAR) zugewiesen ist: 

Erweitem des der weiteren virtuellen Maschine 
(LPAR) zugewiesenen Haupispeicherbereichs (2) 
nach dem Wiedcrhersicllungsschritt (210). 

7. Verfahren gemaC Anspruch I, dadurch gekenn- 
zeichnet, daQ 

der Verlagcrungsbefehl den Ausiausch von Haupt- 
speicherbereichen betrifft. die zwei entsprechcn- 
den, vom Verlagcrungsbefehl bezeichneten virtuel- 
len Maschinen (LPAR) zugewiesen sind; 
der Schritt des temporaren Anhaltens den Schritt 
des temporaren Anhaliens (201) bcider virtueller 
Maschinen (LPAR) umfaOt; 

der Verlagerungsschrittdie folgenden Schrilte um- 
faQt: 

- Auslesen der Inhalte der enisprechenden 
Bereiche des Hauptspeichers (2), die den bei- 
den vinuellen Maschinen (LPAR) jeweils zu- 
gewiesen sind; 

- Speichern dor Inhalte, die aus dem einer der 
beiden virtuellen Maschinen (LPAR) zugewie- 
senen Hauptspeicherbereich ausgelesen wor- 
den sind, in dem der anderen virtuellen Ma- 
schine (LPAR) zugcwiesenen Haupispeicher- 
bereich: und 

- Wiederholen des Ausleseschrittes und des 
Spcichcrschriitcs fur samtliche den beiden vir- 
tuellen Maschinen (LPAR) zugcwiesenc 
Hauptspeicherbereiche (2): und 

der Wiederherstellungsschritt (210) den fol- 
genden Schritt umfaOi: Wiederherstellen der 
beiden virtuellen Maschinen (LPAR). 
8. System von virtuellen Maschinen, mit mehreren 
virtuellen Maschinen (LPARs). die jeweils einem 
Haupispeicherbereich (2) zugewiesen sind, wobei 
jede virtuelle Maschine (LPAR) einen Logikbcfehl- 
prozessor (1) umfaOt. gekennzeichnet durch 
einen Dienstprozessor (5) zur Erzeugung eines 
Verschiebungsbefehls aufgrund eines Verlage- 
rungsbefehls; 

eine Betriebsmittel-Verwaltungseinrichtung (8) zur 
Verwaltung der Zuweisungen der Betriebsmitiel an 
die vinuellen Maschinen (LPAR) und zur Sicue- 
rung der Betriebsmitiel; 

LlP-Steuereinrichtungen (7). die fiir jede der vinu- 
ellen Maschinen (LPAR) vorgesehen sind. urn die 
Operationen der Logikbefehlprozessoren (I) einer 
jeden der virtuellen Maschinen (LPAR) zu steuern: 
und 

eine Einrichtung (6) zum Steuern von virtuellen 
Maschinen, die auf den VerschiebungsbcfchI an- 
spricht, urn eine durch den Verlagcrungsbefehl be- 
zeichnete virtuelle Maschine (LPAR) entsprechend 
einer im Verschiebungsbefeht bezeichneten Adres- 
se im Hauptspeicherbereich (2) 2u verlagern, wenn 
die Operation der bezeichneten virtuellen Maschi- 
ne (LPAR) temporar angehalten worden ist. und 
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zum Steuern der der bezeichneten virtuellen Ma- 
schine (LPAR) entsprechenden LlP-Steuereinrich- 
tung (7), um die bezeichneie virtuelle Maschine 
(LPAR) auf der Grundlage der bezeichneten 
Adresse wiederherzusiellen. 5 

9. System von virtuellen Maschinen gemaO An- 
spruch 8, dadurch gekennzeichnet, daO die Einrich- 
lung (6) zur Steuerung von vinueilen Maschinen 
eine Einrichtung zum Sieuern der entsprechenden 
LIP-Steuereinrichtung(7) umfaOi. um den Logikbe- 10 
fehiprozessor (1) der bezeichneten virtuellen Ma- 
schine (LPAR) lemporar anzuhalten und zu warten, 
bis samiliche Eingabe-ZAusgabeprozcssoren (10), 
die der bezeichneten virtuellen Maschine (LPAR) 
zugeordnet sind, auOer Betrieb gesetzt worden 15 
sind. 

10. System gemafl Anspruch 8. dadurch gekenn- 
zeichnet. daO 

die Betriebsmittel-Verwaltungseinrichtung (8) eine 
Einrichtung umfaOt. die auf eine in sie eingegebene 20 
Priifanforderung ansprichi, um festzustellen,ob die 
bezeichneie virtuelle Maschine (LPAR) im Haupt- 
speicherbercich (2) cntsprcchcnd den bezeichneten 
Adressen verlagert werden kann; und 
die Einrichtung (6) zum Steuern von virtuellen Ma- 25 
schinen eine Einrichtung umfaQl, um die Priifanfor- 
derung zu erzeugen und an die Betriebsmitiel-Ver- 
waliungscinrichiung (8) auszugeben. wenn die Ope- 
ration der bezeichneten virtuellen Maschine 
(LPAR) temporar angehalten worden isi, und um 30 
die bezeichnete virtuelle Maschine (LPAR) ent- 
sprechend der bezeichneten Adresse zu verlagern, 
wenn von der Betriebsmitiel-Verwaltungseinrich- 
lung (8) festgesteitt worden isi. daO die bezeichnete 
virtuelle Maschine (LPAR) verlagert werden kann. 35 

11. System gemaO Anspruch 8. dadurch gekenn- 
zeichnet. daO die Betriebsmittel-Verwaltungsein- 
richtung (8) cine Einrichtung umfaOt« um nach der 
Verlagcrung der bezeichneten virtuellen Maschine 
(LPAR) durch die Einrichtung (6) zum Steuern von 40 
virtuellen Maschinen an samiliche Eingabe-/Aus- 
gabeprozessoren (10). die der bezeichneten virtuel- 
len Maschine (LPAR) zugeordnet sind. das Veria- 
gerungsziel zu melden, 

12. System gemaO Anspruch 8. dadurch gekenn- 45 
zcichnct daB die Einrichtung (6) zum Steuern von 
virtuellen Maschinen eine Einrichtung umfaDi. um 
die Inhalte des der bezeichneten virtuellen Maschi- 
ne (LPAR) momentan zugewiesenen Hauptspei- 
cherbereichs (2) an einen neuen Hauptspeicherbe- 50 
reich (2). der das Verlagerungsziel darsielll. in Ein- 
heiten von Seiten zu ubertragen. 

13. System gemaO Anspruch 8. dadurch gekenn- 
zeichnet. daQ 

der Dienstprozessor (5) eine Einrichtung umfaQt. 55 
die in dem Fall, in dem der Verlagerungsbefehl eine 
Erweiterung eines Hauptspeicherbereichs (2) be- 
irifft, der einer der bezeichneten virtuellen Maschi- 
ne (LPAR) benachbarten virtuellen Maschine 
(LPAR) zugewiesen ist. nach der Wiederherstel- eo 
lung der bezeichneten virtuellen Maschine einen 
Erweiierungsbcfehl erzeugt; und 
das System von virtuellen Maschinen eine Einrich- 
tung umfaDt, um aufgrund des Erweiterungsbefehls 
den der anderen virtuellen Maschine (LPAR) zuge- 65 
wiesenen Hauptspeicherbereich (2) zu erweitern. 

14. System gemaO Anspruch 8, dadurch gekenn- 
zeichnet. daO 
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der Verlagerungsbefehl einen Ausiausch von 
Hauptspeicherbereichen (2) beiriffl.die jeweils ei- 
ner von zwei bezeichneten virtuellen Maschinen 
(LPAR) zugewiesen sind; 

die Einrichtung (6) zum Steuern von virtuellen Ma- 
schinen eine Einrichtung umfaOt, um die den beiden 
virtuellen Maschinen (LPAR) zugeordneien LIP- 
Steuereinrichtungen (7) so zu steuern. daD sie jede 
der beiden virtuellen Maschinen (LPAR) anhalten. 
um die Inhalte, die in jeweiligen den beiden virtuel- 
len Maschinen (LPAR) zugewiesenen Hauptspei- 
cherbereichen (2) gespeicheri sind. auszulesen. um 
den ausgelesenen Inhalt einer der beiden virtuellen 
Maschinen (LPAR) in dem der anderen virtuellen 
Maschine (LPAR) zugewiesenen Hauptspeicherbe- 
reich (2) zu speichcm, um die Auslcscoperation und 
die Speicheroperation fur samiliche den beiden vir- 
tuellen Maschinen (LPAR) zugewiesene Haupt- 
speicherbereiche (2) zu wiederholen und um die 
beiden virtuellen Maschinen (LPAR) wicderherzu- 
stellen. 
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Abstract 



A virtual machine system having a plurality of virtual machines, in v^hich each virtual 
machine can be relocated to a now storage area of main storage without interfering with 
any other virtual machine. The relocation is carried out by move instructions issued by a 
service processor 5 upon receipt of a relocate command. These instructions pass control 
to a controlling section 6 which instructs a logical instruction processor (LIP) controlling 
section 7 to temporarily stop the LIP of the particular virtual machine. Next a check is 
made by the resource managing section 8 to determine whether the virtual machine can 
be moved. Once that has been checked, the virtual machine is relocated on the main 
storage area in accordance with a designated address by the relocate command and the 
controlling section 7 restores operation of the virtual machine. 
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